Web Survey Bibliography
Online experiments are widely used nowadays in scientific research. However this methodological approach is seldom found in commercial market and social research. This surprises since online surveys are an ideal platform by offering the chance to systematically vary stimulus material. In this submission the methodological approach including some general results for three online experiments carried out for the group of the "Öffentlich-rechtlichen Versicherer" is presented. Furthermore implications for the application of online experiments in commercial market and social research are drawn.
The first experiment's goal was the optimization of website content featured on insurance sites. The stimulus material consisted of different information pages with the topic "private retirement insurance", in which pictures, text styles, structure, and text amount varied. Approx. 250 people participated in the experiment. The results show how information pages on the internet should be designed in the insurance branch.
In the second experiment, a suitable and catching name for a website had to be found. Stimulus material consisted of the result page of a search engine, in which the different names, contents, text lengths, and position of the entry were systematically varied. Approx. 240 people participated in this experiment. As a result, one favorite name could be clearly determined and general recommendations in respect to search engine results be given.
In the third experiment the optimal combination of picture and text material for the product "occupational disability insurance" was investigated. The stimulus material consisted of website excepts which were fully randomized created. In respect to text, the text style (e.g., "angst induction", "hard facts", or "without reasons") as well as text structure (continuous text, question-answer- and bullet-point-style) were altered. Furthermore, the number of pictures (1, 2, or 3) and the picture motive (e.g., "young people in jobs", "individual people", or "accident motives") were varied. It was determined how the combination of text in picture on insurance websites can be optimized and which effects e.g. on text appeal, objectivity, and image can be expected.
As a conclusion the possibilities of online experiments in commercial market and social research are presented and areas of application beyond the insurance branch are pointed out.
In der wissenschaftlichen Forschung sind Online-Experimente mittlerweile weit verbreitet. Dagegen findet sich in der kommerziellen Markt- und Sozialforschung dieser methodische Ansatz nur vereinzelt, obgleich die Durchführung von Online-Befragungen die ideale Plattform hierfür darstellt, indem systematische Variationen in Stimulusmaterialien vorgenommen werden können. In diesem Vortrag soll das methodische Vorgehen mit einigen allgemeinen Ergebnissen aus drei für die Gruppe der Öffentlich-rechtlichen Versicherer durchgeführten Online-Experimenten dargestellt werden. Des weiteren werden Implikationen für den Einsatz von Online-Experimenten in der kommerziellen Markt- und Sozialforschung gezogen.
Innerhalb des ersten Experiments stand die Optimierung des Contents von Versicherungswebsites im Vordergrund. Als Stimulusmaterial wurden verschiedene Informationsseiten zum Thema "Private Rentenversicherung" verwendet, in denen Elemente wie Bilder, Textstile, Strukturierung, und Textmenge variiert wurden. An dem Experiment nahmen rund 250 Personen teil. Die Ergebnisse liefern konkrete Aussagen darüber, wie Informationsseiten im Internet für Versicherungen gestaltet werden sollten.
Im zweiten Projekt wurde ein Experiment durchgeführt, um die Namensfindung für ein neues Versicherungsportal zu erleichtern. Hierzu wurde als Stimulusmaterial die Ergebnisseite einer Suchmaschine konstruiert, in der die Namensvorschläge, Inhalte und Länge der Erklärungstexte, sowie Position des Eintrags systematisch variiert wurden. An dem Experiment nahmen rund 240 Probanden teil. Als Ergebnis konnte ein eindeutiger Favorit ermittelt werden sowie allgemeine Empfehlungen zur Gestaltung von Suchmaschineneinträgen gewonnen werden.
Im dritten Projekt wurde die optimale Zusammenstellung von Bild- und Textelementen im Bereich der Berufsunfähigkeitsversicherung untersucht. Als Stimulusmaterial dienten Websiteauszüge, die vollständig randomisiert erstellt wurden. Textlich variiert wurde der Stil (z. B. "Angstinduktion", "harte Fakten" oder "ohne Begründung") sowie die Strukturierung der Texte (Fließtext, Frage-Antwort- und Bulletpoint-Stil). Weiterhin variiert wurde die Anzahl von Bildelementen (1-3 Bilder) sowie die Motive (z. B. "junge Personen im Beruf", "losgelöste Menschen" oder "Unfallmotive"). Als Ergebnis ließen sich eindeutige Richtlinien ableiten, wie sich die Kombination aus Bild und Text optimieren lässt und welche Effekte bspw. auf textliche Ansprache, Objektivität und Image zu erwarten sind.
Zusammenfassend werden die Möglichkeiten von Online-Experimenten in der kommerziellen Markt- und Sozialforschung dargestellt und Anwendungsfelder über die Versicherungsbranche hinaus aufgezeigt.
Homepage - conference (abstract)
Web survey bibliography (364)
- Displaying Videos in Web Surveys: Implications for Complete Viewing and Survey Responses; 2017; Mendelson, J.; Lee Gibson, J.; Romano Bergstrom, J. C.
- Usability Testing for Survey Research; 2017; Geisen, E.; Romano Bergstrom, J. C.
- Where, When, How and with What Do Panel Interviews Take Place and Is the Quality of Answers Affected...; 2017; Niebruegge, S.
- Nonresponses as context-sensitive response behaviour of participants in online-surveys and their relevance...; 2017; Wetzlehuetter, D.
- Do distractions during web survey completion affect data quality? Findings from a laboratory experiment...; 2017; Wenz, A.
- Predicting Breakoffs in Web Surveys; 2017; Mittereder, F.; West, B. T.
- Comparing acquiescent and extreme response styles in face-to-face and web surveys; 2017; Liu, M.; Conrad, F. G.; Lee, S.
- Respondent mode choice in a smartphone survey ; 2017; Conrad, F. G., Schober, M. F., Antoun, C., Yan, H. Y., Hupp, A., Johnston, M., Ehlen, P., Vickers, L...
- Effects of Mobile versus PC Web on Survey Response Quality: a Crossover Experiment in a Probability...; 2017; Antoun, C.; Couper, M. P.; G. G.Conrad, F. G.
- Methods for Evaluating Respondent Attrition in Web-Based Surveys; 2016; Hochheimer, C. J.; Sabo, R. T.; Krist, A. H.; Day, T.; Cyrus, J.; Woolf, S. H.
- Mobile-only web survey respondents; 2016; Lugtig, P. J.; Toepoel, V.; Amin, A.
- Using official surveys to reduce bias of estimates from nonrandom samples collected by web surveys; 2016; Beresovsky, V.; Dorfman, A.; Rumcheva, P.
- Making use of Internet interactivity to propose a dynamic presentation of web questionnaires; 2016; Revilla, M.; Ochoa, C.; Turbina, A.
- Helping respondents provide good answers in Web surveys; 2016; Couper, M. P.; Zhang, C.
- Gamifying. Not all fun and games; 2016; Stubington, P.; Crichton, C.
- FocusVision 2015 Annual MR Technology Report; 2016; Macer, T., Wilson, S.
- Are sliders too slick for surveys?; 2016; Buskirk, T. D.
- Research gamification for quality pharmaceutical stakeholder insights; 2016; Mondry, B.; Fink, L.
- SurveyTester from Knowledge Navigators ; 2016; Macer, T.
- Simplifying your mobile solution; 2016; Berry, K.
- Effects of motivating question types with graphical support in multi channel design studies; 2016; Luetters, H.; Friedrich-Freksa, M.; Vitt, SGoldstein, D. G.
- Why Do Web Surveys Take Longer on Smartphones?; 2016; Couper, M. P.; J. J.Peterson, G. J.
- Usability Testing within Agile Process; 2016; Holland, T.
- Association of Eye Tracking with Other Usability Metrics ; 2016; Olmsted, E. L.
- Cognitive Probing Methods in Usability Testing – Pros and Cons; 2016; Nichols, E. M.
- Thinking Inside the Box Visual Design of the Response Box Affects Creative Divergent Thinking in an...; 2016; Mohr, A. H.; Sell, A.; Lindsay, T.
- Distractions: The Incidence and Consequences of Interruptions for Survey Respondents ; 2016; Ansolabehere, S.; Schaffner, B. F.
- The Effect of CATI Questions, Respondents, and Interviewers on Response Time; 2016; Olson, K.; Smyth, J. D.
- New Generation of Online Questionnaires?; 2016; Revilla, M.; Ochoa, C.; Turbina, A.
- The Analysis of Respondent’s Behavior toward Edit Messages in a Web Survey; 2016; Park, Y.
- Effects of Data Collection Mode and Response Entry Device on Survey Response Quality; 2016; Ha, L.; Zhang, Che.; Jiang, W.
- Navigation Buttons in Web-Based Surveys: Respondents’ Preferences Revisited in the Laboratory; 2016; Romano Bergstrom, J. C.; Erdman, C.; Lakhe, S.
- Online Surveys are Mixed-Device Surveys. Issues Associated with the Use of Different (Mobile) Devices...; 2016; Toepoel, V.; Lugtig, P. J.
- A Technical Guide to Effective and Accessible web Surveys; 2016; Baatard, G.
- The Validity of Surveys: Online and Offline; 2016; Wiersma, W.
- Computer-assisted and online data collection in general population surveys; 2016; Skarupova, K.
- A Framework of Incorporating Thai Social Networking Data in Online Marketing Survey; 2016; Jiamthapthaksin, R.; Aung, T. H.; Ratanasawadwat, N.
- Creation and Usability Testing of a Web-Based Pre-Scanning Radiology Patient Safety and History Questionnaire...; 2016; Robinson, T. J.; DuVall, S.; Wiggins III, R
- Comprehension and engagement in survey interviews with virtual agents; 2016; Conrad, F. G.; Schober, M. F.; Jans, M.; Orlowski, R. A.; Nielsen, D.; Levenstein, R. M.
- Taming Big Data: Using App Technology to Study Organizational Behavior on Social Media; 2015; Bail, C. A.
- A Meta-Analysis of Breakoff Rates in Mobile Web Surveys; 2015; Mavletova, A. M.; Couper, M. P.
- Optimizing the Decennial Census for Mobile – A Case Study; 2015; Nichols, E. M.; Hawala, E. O.; Horwitz, R.; Bentley, M.
- Using Video to Reinvigorate the Open Question; 2015; Cape, P.
- Are Sliders Too Slick for Surveys? An Experiment Comparing Slider and Radio Button Scales for Smartphone...; 2015; Aadland, D.; Aalberg, T.
- Web Surveys Optimized for Smartphones: Are there Differences Between Computer and Smartphone Users?; 2015; Andreadis, I.
- Designing web surveys for the multi-device internet; 2015; de Bruijne, M.
- Data Quality Standards in Mixed Mode Surveys; 2015; Bremer, J.; Barbulescu, M.; Bennett, J.
- Changing from CAPI to CAWI in an ongoing household panel - experiences from the German Socio-Economic...; 2015; Schupp, J.; Sassenroth, D.
- Rating Scales in Web Surveys: A Test of New Drag-and-Drop Rating Procedures; 2015; Kunz, T.
- A Review of Issues in Gamified Surveys; 2015; Keusch, F.; Zhang, Che.